導(dǎo)讀:像pR劫持一樣,對一些比較難以預(yù)防的黑帽陷害手法,本來不太想積極討論,因為有很多時候會對無辜的站長造成很大的傷害。在前兩天的SEO案例中,提到了代理劫持(proxy hijack),有人問是
發(fā)表日期:2020-07-05
文章編輯:興田科技
瀏覽次數(shù):8361
標(biāo)簽:
像pR劫持一樣,對一些比較難以預(yù)防的黑帽陷害手法,本來不太想積極討論,因為有很多時候會對無辜的站長造成很大的傷害。
在前兩天的SEO案例中,提到了代理劫持(proxy hijack),有人問是怎么回事,今天就解釋一下。像這種東西都是雙刃劍,不懷好意的人看了,又多了一個損人利己的工具。另一方面,已經(jīng)深受其害的站長看了,也許對他們預(yù)防和恢復(fù)有正面意義。
代理劫持簡單說就是搜索引擎收錄了通過代理服務(wù)器瀏覽的網(wǎng)頁,而把原本真正的網(wǎng)頁懲罰或刪除。
國內(nèi)站長對代理服務(wù)器(proxy server)肯定都很熟悉。在使用代理服務(wù)器上其他網(wǎng)站時,瀏覽器顯示的URL通常是類似于:
http://www.proxysite.com/proxy/www.proxysite.com
其中proxysite.com是代理服務(wù)器域名,proxysite.com是真正要訪問的網(wǎng)站。
在瀏覽器打開這種URL當(dāng)然沒問題,但如果搜索引擎抓取了這種URL,就會對原來的網(wǎng)站形成完全復(fù)制內(nèi)容網(wǎng)頁。雖然復(fù)制內(nèi)容網(wǎng)頁在絕大部分情況下只是被忽略不計,但在某些情況下,搜索引擎判斷錯誤,會把原始的版本當(dāng)做是復(fù)制而被懲罰甚至被刪除。
一般情況下,通過代理訪問的URL不應(yīng)該被收錄。但如果有人惡意鏈接向這個代理URL,搜索引擎也會訪問和抓取。
怎么預(yù)防或恢復(fù)被代理劫持的排名呢?
最簡單的,如果看到自己的網(wǎng)頁被代理劫持,查一下那個代理服務(wù)器的Ip地址,自己服務(wù)器上把那個Ip地址屏蔽掉,禁止抓取。
但有的時候,代理服務(wù)器的Ip地址會有變化,而且代理服務(wù)器又那么多,很可能屏蔽不過來。更復(fù)雜的方法是服務(wù)器端通過程序鑒別來訪問的是否是搜索引擎蜘蛛,是否是真正的搜索引擎蜘蛛。
有些情況下,搜索引擎蜘蛛通過代理URL訪問時的瀏覽器類型(User Agent),還是搜索引擎的蜘蛛。不過,有的代理服務(wù)器可能設(shè)置為隱藏原始Ip地址,隱藏User Agent,這就給判斷是否是搜索引擎蜘蛛造成很大困難。
這時網(wǎng)站程序就需要主動驗證來訪的是否是真的搜索引擎蜘蛛。如果程序檢驗確實是真實的蜘蛛,就返回正常頁面。如果檢測不是蜘蛛是正常用戶,或是假冒的蜘蛛,那么返回的網(wǎng)頁都加入noindex,nofollow標(biāo)簽。這樣這些原始網(wǎng)頁通過代理訪問時,都不能被搜索引擎所抓取。
Google2月份發(fā)表在黑板報及網(wǎng)站管理員博客的翻譯Matt Cutts的怎樣驗證Google蜘蛛帖子(Matt Cutts的原貼沒發(fā)在自己的博客,而是發(fā)在英文版網(wǎng)站管理員博客),不是發(fā)著玩的,而是有很深的意義。從目前零個引用鏈接和評論看,大部分人不知道這個帖子有什么用。
按說搜索引擎對這種代理劫持應(yīng)該有辦法判斷,不然這就成了一些人可以陷害競爭對手的簡易方法。不過,任何算法都有漏洞,就算算法能99%的正確判斷,但是漏網(wǎng)的那一個錯誤就可能使無辜的網(wǎng)站被刪除。
寫這篇文章是希望介紹給跟多人,讓大家能更好的預(yù)防。使用這種方法意圖陷害他人,相信大家都會十分鄙視的。
很少寫帖子時想,看懂的人越少越好。這是一篇。
上一篇:
友情鏈接交換與PR值更新總結(jié)更多新聞
2023
什么是建設(shè)網(wǎng)站費(fèi)用?在建設(shè)一個網(wǎng)站之前,了解和計劃費(fèi)用是至關(guān)重要的。。建設(shè)網(wǎng)站的費(fèi)用包括網(wǎng)站設(shè)計、開...
View details
2023
京山網(wǎng)站建設(shè)公司擁有一支經(jīng)驗豐富、專業(yè)技術(shù)的團(tuán)隊,包括設(shè)計師、開發(fā)人員和優(yōu)化人員。他們精通各種網(wǎng)站開發(fā)技術(shù),能夠根據(jù)客戶的需求進(jìn)行定制開發(fā),并確保網(wǎng)站在各個方面的完美呈現(xiàn)。
View details
2023
丹東網(wǎng)站建設(shè)公司擁有經(jīng)驗豐富的團(tuán)隊成員,他們了解最新的技術(shù)趨勢和行業(yè)最佳實踐。他們可以根據(jù)您的業(yè)務(wù)需求,為您提供專業(yè)的建議和解決方案。無論您需要一個簡單的靜態(tài)網(wǎng)站還是一個復(fù)雜的電子商務(wù)平臺,他們都能根據(jù)您的要求進(jìn)行定制開發(fā)。
View details
2019
對于搜索引擎而言,其最終的目的是為了更好的滿足用戶需求,也就是我們常說的“用戶體驗”,想要做好用戶體驗以及得以提升,需要從多方面進(jìn)行考慮和把握,其中提高內(nèi)容質(zhì)量度是非常重
View details